ስፓርክ የሚጠቀመው የትኛውን የ Python ስሪት ነው?
ስፓርክ የሚጠቀመው የትኛውን የ Python ስሪት ነው?

ቪዲዮ: ስፓርክ የሚጠቀመው የትኛውን የ Python ስሪት ነው?

ቪዲዮ: ስፓርክ የሚጠቀመው የትኛውን የ Python ስሪት ነው?
ቪዲዮ: RTX 3090 Ti vs RTX 3060 Ultimate Showdown for Stable Diffusion, ML, AI & Video Rendering Performance 2024, ሚያዚያ
Anonim

ብልጭታ በJava 8+ ላይ ይሰራል ፒዘን 2.7+/3.4+ እና R 3.1+. ለ Scala API፣ ብልጭታ 2.3. 0 ይጠቀማል ስካላ 2.11. ያስፈልግዎታል መጠቀም ተስማሚ Scala ስሪት (2.11.

ከዚህ ጋር በተገናኘ፣ ስፓርክ ከፓይዘን 3 ጋር ይሰራል?

Apache ብልጭታ የክላስተር ኮምፒውቲንግ ማዕቀፍ ነው፣ በአሁኑ ጊዜ በክፍት ምንጭ Big Data arena ውስጥ በጣም ንቁ ከሆኑት ውስጥ አንዱ ነው። ከቅርቡ ስሪት 1.4 (ሰኔ 2015) ጀምሮ፣ ብልጭታ R ይደግፋል እና Python 3 (ቀደም ሲል የነበረውን የጃቫ፣ ስካላ እና ድጋፍን ለማሟላት ፒዘን 2).

ከላይ በተጨማሪ የ Python ስፓርክን ስሪት እንዴት መለወጥ እችላለሁ? ከፈለጉ ብቻ መለወጥ የ የ Python ስሪት ለአሁኑ ተግባር የሚከተለውን የ pyspark ጅምር ትእዛዝ መጠቀም ይችላሉ፡- PYSPARK_DRIVER_PYTHON=/home/user1/anaconda2/bin/ ፓይቶን PYSPARK_PYTHON=/usr/local/anaconda2/bin/ ፓይቶን ፒስፓርክ - ጌታ

በተጨማሪም፣ የቅርብ ጊዜው የስፓርክ ስሪት ምንድነው?

Apache Spark

ኦሪጅናል ደራሲ(ዎች) Matei Zaharia
የመጀመሪያ ልቀት ግንቦት 26 ቀን 2014 ዓ.ም
የተረጋጋ መለቀቅ 2.4.5 / ፌብሩዋሪ 8, 2020
ማከማቻ የስፓርክ ማከማቻ
ውስጥ ተፃፈ ስካላ

ስፓርክ Python ምንድን ነው?

ትልቅ ዳታ በ Apache መሳል ብልጭታ እና ፒዘን Py4J በውስጡ የተዋሃደ ታዋቂ ቤተ-መጽሐፍት ነው። ፒስፓርክ ይፈቅዳል ፓይቶን ከJVM ነገሮች (RDD's) ጋር በተለዋዋጭ በይነገጽ። Apache ብልጭታ ለ በይነተገናኝ ሼል ጋር ይመጣል ፓይቶን ለ Scala እንደሚያደርገው. ቅርፊቱ ለ ፓይቶን በመባል ይታወቃል ፒስፓርክ ”.

የሚመከር: