AWS MapReduce ምንድን ነው?

2024 ደራሲ ደራሲ: Lynn Donovan | [email protected]. ለመጨረሻ ጊዜ የተሻሻለው: 2023-12-15 23:42

Amazon Elastic ካርታ ቀንስ (EMR) የአማዞን ድር አገልግሎቶች ነው AWS ) ትልቅ መረጃን ለማቀናበር እና ለመተንተን መሳሪያ. Amazon EMR በAmazon Elastic Compute Cloud (EC2) እና Amazon Simple Storage Service (S3) ላይ በ Hadoop የቨርቹዋል ሰርቨሮች ላይ ትልቅ መረጃን ያሰናዳል።

በዚህ መንገድ AWS EMR እንዴት ይሰራል?

አገልግሎቱ አንድ ማስተር እና ሌሎች በርካታ ኖዶችን ያካተተ በደንበኛ የተገለጹ የአማዞን EC2 አጋጣሚዎችን ይጀምራል። አማዞን EMR በእነዚህ አጋጣሚዎች ሃዱፕ ሶፍትዌርን ይሰራል። ዋናው መስቀለኛ መንገድ የግቤት መረጃን ወደ ብሎኮች ይከፋፍላል እና የብሎኮችን ሂደት ወደ ሌሎች አንጓዎች ያሰራጫል።

ከላይ በተጨማሪ፣ በ ec2 እና EMR መካከል ያለው ልዩነት ምንድነው? የማይመሳስል EMR , EC2 የባሪያ ኖዶችን ወደ ኮር እና የተግባር ኖዶች አይመድብም። ይህ መስቀለኛ መንገድ ከጠፋ/ከጠፋ የኤችዲኤፍኤስ መረጃ የማጣት አደጋን ይጨምራል። EC2 በ s3 ላይ ውሂብ ለመድረስ Apache ቤተ-ፍርግሞችን (s3a) ይጠቀማል። በሌላ በኩል, EMR ወደ s3 ፈጣን መዳረሻ ለማግኘት የAWS የባለቤትነት ኮድ ይጠቀማል።

በተጨማሪም AWS EMR ሙሉ በሙሉ ነው የሚተዳደረው?

አማዞን የላስቲክ ካርታ ቅነሳ ( EMR ) ሀ ሙሉ በሙሉ የሚተዳደር Hadoop እና Spark መድረክ ከ አማዞን የድር አገልግሎት ( AWS ). ጋር EMR , AWS ደንበኞች ትልቅ የውሂብ የስራ ጫናዎችን ለመስራት በፍጥነት ባለብዙ-ኖድ ሃዱፕ ስብስቦችን ማሽከርከር ይችላሉ።

AWS Hadoop ይጠቀማል?

አማዞን የድር አገልግሎቶች ይጠቀማል ክፍት ምንጭ Apache ሃዱፕ መረጃን የሚጨምሩ ተግባራትን ለማከናወን ከፍተኛ መጠን ያለው የኮምፒውቲንግ ሃይልን በቀላሉ ለማግኘት የተከፋፈለ የኮምፒውተር ቴክኖሎጂ። ሃዱፕ ክፍት ምንጭ የሆነው የጎግል MapReduce ስሪት እንደ ያሁ እና ፌስቡክ ባሉ ኩባንያዎች ጥቅም ላይ ውሏል።