Ποια έκδοση της Python χρησιμοποιεί το Spark;
Ποια έκδοση της Python χρησιμοποιεί το Spark;

Βίντεο: Ποια έκδοση της Python χρησιμοποιεί το Spark;

Βίντεο: Ποια έκδοση της Python χρησιμοποιεί το Spark;
Βίντεο: PYTHON - ΜΑΘΗΜΑ 1 - ΕΙΣΑΓΩΓΗ - ΘΕΩΡΙΑ 1 από 2 - Εγκατάσταση Python και Pycharm 2024, Νοέμβριος
Anonim

Σπίθα τρέχει σε Java 8+, Πύθων 2,7+/3,4+ και R 3,1+. Για το Scala API, Σπίθα 2.3. 0 χρήσεις Scala 2.11. Θα χρειαστεί να χρήση μια συμβατή Scala εκδοχή (2.11.

Αντίστοιχα, το spark λειτουργεί με την Python 3;

Απάχης Σπίθα είναι ένα υπολογιστικό πλαίσιο συμπλέγματος, ένα από τα πιο ενεργά αναπτυγμένα επί του παρόντος στην αρένα Big Data ανοιχτού κώδικα. Από την τελευταία έκδοση 1.4 (Ιούνιος 2015), Σπίθα υποστηρίζει R και Python 3 (για να συμπληρώσει την προηγούμενη διαθέσιμη υποστήριξη για Java, Scala και Πύθων 2).

Εκτός από τα παραπάνω, πώς μπορώ να αλλάξω την έκδοση spark της Python; Σε περίπτωση που το θέλετε μόνο αλλαγή ο έκδοση python για την τρέχουσα εργασία, μπορείτε να χρησιμοποιήσετε την ακόλουθη εντολή έναρξης pyspark: PYSPARK_DRIVER_PYTHON=/home/user1/anaconda2/bin/ Πύθων PYSPARK_PYTHON=/usr/local/anaconda2/bin/ Πύθων pyspark -- master..

Επιπλέον, ποια είναι η τελευταία έκδοση spark;

Apache Spark

Πρωτότυπος συγγραφέας Ματέι Ζαχαρία
Αρχική έκδοση 26 Μαΐου 2014
Σταθερή απελευθέρωση 2.4.5 / 8 Φεβρουαρίου 2020
Αποθήκη Spark Repository
Γραμμένο σε Σκάλα

Τι είναι το spark Python;

Δαμάστε μεγάλα δεδομένα με Apache Σπίθα και Πύθων Το Py4J είναι μια ευρέως ενσωματωμένη βιβλιοθήκη PySpark που αφήνει Πύθων διασύνδεση δυναμικά με αντικείμενα JVM (RDD's). Απάχης Σπίθα συνοδεύεται από ένα διαδραστικό κέλυφος για Πύθων όπως και για τη Σκάλα. Το κέλυφος για Πύθων είναι γνωστό ως PySpark ”.

Συνιστάται: