ስፓርክ የሚጠቀመው የትኛውን የ Python ስሪት ነው?

ቪዲዮ: ስፓርክ የሚጠቀመው የትኛውን የ Python ስሪት ነው?

2024 ደራሲ ደራሲ: Lynn Donovan | [email protected]. ለመጨረሻ ጊዜ የተሻሻለው: 2023-12-15 23:42

ብልጭታ በJava 8+ ላይ ይሰራል ፒዘን 2.7+/3.4+ እና R 3.1+. ለ Scala API፣ ብልጭታ 2.3. 0 ይጠቀማል ስካላ 2.11. ያስፈልግዎታል መጠቀም ተስማሚ Scala ስሪት (2.11.

ከዚህ ጋር በተገናኘ፣ ስፓርክ ከፓይዘን 3 ጋር ይሰራል?

Apache ብልጭታ የክላስተር ኮምፒውቲንግ ማዕቀፍ ነው፣ በአሁኑ ጊዜ በክፍት ምንጭ Big Data arena ውስጥ በጣም ንቁ ከሆኑት ውስጥ አንዱ ነው። ከቅርቡ ስሪት 1.4 (ሰኔ 2015) ጀምሮ፣ ብልጭታ R ይደግፋል እና Python 3 (ቀደም ሲል የነበረውን የጃቫ፣ ስካላ እና ድጋፍን ለማሟላት ፒዘን 2).

ከላይ በተጨማሪ የ Python ስፓርክን ስሪት እንዴት መለወጥ እችላለሁ? ከፈለጉ ብቻ መለወጥ የ የ Python ስሪት ለአሁኑ ተግባር የሚከተለውን የ pyspark ጅምር ትእዛዝ መጠቀም ይችላሉ፡- PYSPARK_DRIVER_PYTHON=/home/user1/anaconda2/bin/ ፓይቶን PYSPARK_PYTHON=/usr/local/anaconda2/bin/ ፓይቶን ፒስፓርክ - ጌታ

በተጨማሪም፣ የቅርብ ጊዜው የስፓርክ ስሪት ምንድነው?

Apache Spark

ኦሪጅናል ደራሲ(ዎች)	Matei Zaharia
የመጀመሪያ ልቀት	ግንቦት 26 ቀን 2014 ዓ.ም
የተረጋጋ መለቀቅ	2.4.5 / ፌብሩዋሪ 8, 2020
ማከማቻ	የስፓርክ ማከማቻ
ውስጥ ተፃፈ	ስካላ

ስፓርክ Python ምንድን ነው?

ትልቅ ዳታ በ Apache መሳል ብልጭታ እና ፒዘን Py4J በውስጡ የተዋሃደ ታዋቂ ቤተ-መጽሐፍት ነው። ፒስፓርክ ይፈቅዳል ፓይቶን ከJVM ነገሮች (RDD's) ጋር በተለዋዋጭ በይነገጽ። Apache ብልጭታ ለ በይነተገናኝ ሼል ጋር ይመጣል ፓይቶን ለ Scala እንደሚያደርገው. ቅርፊቱ ለ ፓይቶን በመባል ይታወቃል ፒስፓርክ ”.

የሚመከር:

ወታደሩ የሚጠቀመው የትኛውን የስልክ መያዣ ነው?

10 ምርጥ የውትድርና ደረጃ ያላቸው የአይፎን መያዣዎች የሐር ትጥቅ ጠንካራ መያዣ። ዋጋ፡ 18 ዶላር የህይወት ማረጋገጫ ኑድ። ዋጋ: $80 - $100. ትሪደንት ክራከን ኤ.ኤም.ኤስ. ዋጋ፡ 90 ዶላር የሞፊ ጭማቂ ጥቅል H2PRO. ዋጋ: 130 ዶላር. የከተማ ትጥቅ Gear መያዣ. ዋጋ፡ 35 ዶላር Pong Rugged መያዣ. ዋጋ: $60 - $70. Speck CandyShell ያዝ. ዋጋ፡ 35 ዶላር ውሻ እና አጥንት እርጥብ ልብስ. ዋጋ፡ 40 ዶላር