Πίνακας περιεχομένων:

Πώς μπορώ να ξέρω εάν το Spark είναι εγκατεστημένο στο Linux;
Πώς μπορώ να ξέρω εάν το Spark είναι εγκατεστημένο στο Linux;

Βίντεο: Πώς μπορώ να ξέρω εάν το Spark είναι εγκατεστημένο στο Linux;

Βίντεο: Πώς μπορώ να ξέρω εάν το Spark είναι εγκατεστημένο στο Linux;
Βίντεο: MEGA Chia GPU Farming and Plotting Guide for Linux - Gigahorse Start to Finish - 2023 2024, Ενδέχεται
Anonim

2 Απαντήσεις

  1. Ανοιξε Σπίθα κέλυφος Terminal και εισάγετε την εντολή.
  2. sc.έκδοση Or σπίθα -υποβολή --έκδοση.
  3. Ο ευκολότερος τρόπος είναι απλά να ξεκινήσεις " σπίθα -shell» στη γραμμή εντολών. Θα εμφανίσει το.
  4. τρέχουσα ενεργή έκδοση του Σπίθα .

Επίσης, να ξέρω είναι, πώς μπορώ να ξέρω αν το spark έχει εγκατασταθεί στο Ubuntu;

Εγκατάσταση του Spark στο Ubuntu

  1. Κατεβάστε την τελευταία έκδοση του Spark εδώ.
  2. Αποσυσκευάστε το αρχείο.
  3. Μετακινήστε τον φάκελο που προκύπτει και δημιουργήστε έναν συμβολικό σύνδεσμο, ώστε να μπορείτε να έχετε εγκατεστημένες πολλές εκδόσεις του Spark.
  4. Δοκιμάστε το κέλυφος Spark.
  5. Ίσως το Scala να μην είναι το φλιτζάνι του τσαγιού σας και θα προτιμούσατε να χρησιμοποιήσετε την Python.

Δεύτερον, πού είναι εγκατεστημένο το spark στο EMR; Από emr -4,0. 0, όλες οι εφαρμογές ενεργοποιημένες EMR βρίσκονται στο /usr/lib. Σπίθα βρίσκεται στο /usr/lib/ σπίθα.

Κατά συνέπεια, πώς στήνεις μια σπίθα;

Βήματα για την εγκατάσταση του Spark

  1. Βήμα 1: Βεβαιωθείτε ότι η Java είναι εγκατεστημένη.
  2. Βήμα 2: Βεβαιωθείτε ότι το Scala είναι εγκατεστημένο.
  3. Βήμα 3: Κατεβάστε το Scala.
  4. Βήμα 4: Εγκαταστήστε το Scala.
  5. Βήμα 5: Λήψη του Apache Spark.
  6. Βήμα 6: Εγκατάσταση Spark.
  7. Βήμα 7: Επαληθεύστε την εφαρμογή Εγκατάσταση του Spark στο σύστημά σας.

Χρειάζεται να εγκαταστήσω το Scala για spark;

Εσύ θα χρειάζομαι για να χρησιμοποιήσετε ένα συμβατό Σκάλα έκδοση (2.10. x). Η Java είναι απαραίτητη Σπίθα + πολλές άλλες μεταβατικές εξαρτήσεις ( σκάλα ο μεταγλωττιστής είναι απλώς μια βιβλιοθήκη για το JVM). Το PySpark απλώς συνδέεται εξ αποστάσεως (μέσω υποδοχής) στο JVM χρησιμοποιώντας Py4J (διαλειτουργία Python-Java).

Συνιστάται: