תוכן עניינים:

איך אני יודע אם spark מותקן לינוקס?
איך אני יודע אם spark מותקן לינוקס?

וִידֵאוֹ: איך אני יודע אם spark מותקן לינוקס?

וִידֵאוֹ: איך אני יודע אם spark מותקן לינוקס?
וִידֵאוֹ: Apache Spark - Install Apache Spark On Ubuntu |Spark Tutorial | Part 6 2024, נוֹבֶמבֶּר
Anonim

2 תשובות

  1. לִפְתוֹחַ לְעוֹרֵר shell Terminal והזן פקודה.
  2. sc.version Or לְעוֹרֵר -שלח --גרסה.
  3. הדרך הקלה ביותר היא פשוט להפעיל את " לְעוֹרֵר -shell" בשורת הפקודה. זה יציג את.
  4. הגרסה הפעילה הנוכחית של לְעוֹרֵר .

כמו כן, לדעת הוא, איך אני יודע אם spark מותקן אובונטו?

התקנת Spark על אובונטו

  1. הורד את המהדורה האחרונה של Spark כאן.
  2. פרק את הארכיון.
  3. הזז את התיקיה שהתקבלה וצור קישור סמלי כך שתוכל להתקין גרסאות מרובות של Spark.
  4. בדוק את מעטפת הניצוץ.
  5. אולי סקאלה היא לא כוס התה שלך ואתה מעדיף להשתמש ב-Python.

שנית, היכן מותקן ניצוץ ב-EMR? החל מ emr -4.0. 0, כל האפליקציות פועלות EMR נמצאים ב-/usr/lib. לְעוֹרֵר נמצא ב-/usr/lib/ לְעוֹרֵר.

כתוצאה מכך, איך מקימים ניצוץ?

שלבים להתקנת Spark

  1. שלב 1: ודא אם Java מותקן.
  2. שלב 2: ודא אם Scala מותקן.
  3. שלב 3: הורד את Scala.
  4. שלב 4: התקן את Scala.
  5. שלב 5: הורדת Apache Spark.
  6. שלב 6: התקנת Spark.
  7. שלב 7: ודא את התקנת אפליקציית Spark במערכת שלך.

האם אני צריך להתקין Scala עבור ניצוץ?

אתה צוֹרֶך להשתמש בתואם סקאלה גרסה (2.10. x). Java היא חובה עבור לְעוֹרֵר + תלות מעברית רבות אחרות ( scala מהדר הוא רק ספרייה עבור JVM). PySpark פשוט מתחבר מרחוק (על ידי שקע) ל-JVM באמצעות Py4J (פעולה הדדית של Python-Java).

מוּמלָץ: