ከ Amazon Elastic MapReduce በስተጀርባ ያለው የመረጃ ማቀነባበሪያ ሞተር ምንድን ነው?

2024 ደራሲ ደራሲ: Lynn Donovan | [email protected]. ለመጨረሻ ጊዜ የተሻሻለው: 2023-12-15 23:42

Amazon EMR Apache Hadoop እንደ ስርጭት ይጠቀማል የመረጃ ማቀነባበሪያ ሞተር . Hadoop ክፍት ምንጭ ነው፣ የሚደግፍ የጃቫ ሶፍትዌር ማዕቀፍ ውሂብ በትልልቅ ስብስቦች ላይ የሚሰሩ ሰፊ የተከፋፈሉ መተግበሪያዎች የ የሸቀጦች ሃርድዌር.

በተጨማሪም, Amazon Elastic MapReduce ምንድን ነው?

የአማዞን ላስቲክ ካርታ ቅነሳ ( EMR ) ነው የአማዞን ድር አገልግሎቶች ( AWS ) ትልቅ መረጃን ለማቀናበር እና ለመተንተን መሳሪያ. Amazon EMR በ Hadoop የቨርቹዋል ሰርቨሮች ስብስብ ላይ ትልቅ መረጃን ያዘጋጃል። Amazon Elastic ደመናን አስሉ ( EC2 ) እና አማዞን ቀላል የማከማቻ አገልግሎት ( S3 ).

በተጨማሪም፣ Amazon EMR ሙሉ በሙሉ ነው የሚተዳደረው? ሀ ነው። ሙሉ በሙሉ የሚተዳደር የውሂብ ሐይቅ አገልግሎት የውሂብ ማከማቻውን ከኮምፒዩተር ሃብቶች መፍታት የሚችል እና በምትኩ የስሌት ስብስቦችን ሊሰፋ የሚችል፣ በፍላጎት ጥቅም ላይ ሊውል የሚችል እና ለብዙ ዘለላዎች ተመሳሳይ የውሂብ ስብስቦችን በአንድ ጊዜ የመድረስ ችሎታን ያካትታል።

እንዲሁም አንድ ሰው AWS EMR እንዴት ይሰራል?

በአጠቃላይ፣ ውሂብን ወደ ውስጥ ሲያስገቡ Amazon EMR , ግብአቱ እንደ ፋይሎች በመረጡት የፋይል ስርዓት ውስጥ እንደ ፋይሎች የተከማቸ ነው, ለምሳሌ አማዞን S3 ወይም HDFS። ይህ ውሂብ በሂደቱ ቅደም ተከተል ከአንድ ደረጃ ወደ ሌላው ያልፋል። የመጨረሻው ደረጃ የውጤት ውሂቡን ወደ አንድ የተወሰነ ቦታ ይጽፋል, ለምሳሌ አማዞን S3 ባልዲ.

በ ec2 እና EMR መካከል ያለው ልዩነት ምንድን ነው?

የማይመሳስል EMR , EC2 የባሪያ ኖዶችን ወደ ኮር እና የተግባር ኖዶች አይመድብም። ይህ መስቀለኛ መንገድ ከጠፋ/ከጠፋ የኤችዲኤፍኤስ መረጃ የማጣት አደጋን ይጨምራል። EC2 በ s3 ላይ ውሂብ ለመድረስ Apache ቤተ-ፍርግሞችን (s3a) ይጠቀማል። በሌላ በኩል, EMR ወደ s3 ፈጣን መዳረሻ ለማግኘት የAWS የባለቤትነት ኮድ ይጠቀማል።