Πρέπει να μάθω Hadoop για σπινθήρα;
Πρέπει να μάθω Hadoop για σπινθήρα;

Βίντεο: Πρέπει να μάθω Hadoop για σπινθήρα;

Βίντεο: Πρέπει να μάθω Hadoop για σπινθήρα;
Βίντεο: How to Install Hadoop on Windows 2024, Νοέμβριος
Anonim

Όχι, δεν το κάνεις πρέπει να μάθουν Hadoop προς το LearnSpark . Σπίθα ήταν ένα ανεξάρτητο έργο. Αλλά μετά το YARNAnd Hadoop 2.0, Σπίθα έγινε δημοφιλής γιατί Σπίθα μπορεί να τρέξει πάνω από το HDFS μαζί με άλλα Hadoop συστατικά. Hadoop είναι ένα πλαίσιο στο οποίο γράφετε εργασία MapReduce κληρονομώντας κλάσεις Java.

Ομοίως, ποιο είναι καλύτερο να μάθεις spark ή Hadoop;

Η πρώτη και κύρια διαφορά είναι η χωρητικότητα της μνήμης RAM και η χρήση της. Σπίθα χρήσεις περισσότερο Μνήμη τυχαίας πρόσβασης Hadoop , αλλά «τρώει» λιγότερη ποσότητα μνήμης internet ή δίσκου, οπότε αν χρησιμοποιείτε Hadoop , είναι καλύτερα για να βρείτε ένα ισχυρό μηχάνημα με μεγάλη εσωτερική αποθήκευση.

Δεύτερον, είναι εύκολο να μάθεις το Hadoop; Hadoop προγραμματισμός είναι ευκολότερη και για άτομα με δεξιότητες SQL - χάρη στο Pig and Hive. Οι μαθητές ή οι επαγγελματίες χωρίς κανένα υπόβαθρο προγραμματισμού, με βασικές γνώσεις SQL, μπορούν να κυριαρχήσουν Hadoop μέσω ολοκληρωμένης πρακτικής Hadoop εκπαίδευση εάν έχουν το ζήλο και την προθυμία μαθαίνω.

Ρώτησε επίσης, πόσο καιρό θα πάρει για να μάθει το Hadoop;

περίπου 3-4 μήνες

Ο σπινθήρας αντικαθιστά το Hadoop;

Σπίθα δεν μπορεί ποτέ να είναι α αντικατάσταση Για Hadoop ! Σπίθα είναι μια μηχανή επεξεργασίας που λειτουργεί στην κορυφή του Hadoop οικοσύστημα. Όπως φαίνεται στην παραπάνω αρχιτεκτονική, Σπίθα έρχεται στη θέση του MapReduce στο Hadoop οικοσύστημα. Υπάρχουν άλλα εξαρτήματα στο Hadoop αρχιτεκτονική για την επεξεργασία δεδομένων όπως το Pig andHive.

Συνιστάται: