የእኔን የስፓርክ ታሪክ አገልጋይ እንዴት እጀምራለሁ?

2024 ደራሲ ደራሲ: Lynn Donovan | [email protected]. ለመጨረሻ ጊዜ የተሻሻለው: 2023-12-15 23:42

የስፓርክ ታሪክ አገልጋይን ለማንቃት፡-

1. በ DSEFS ፋይል ስርዓት ውስጥ የክስተት ምዝግብ ማስታወሻዎችን ማውጫ ይፍጠሩ፡ dse hadoop fs -mkdir /spark $ dse hadoop FS -mkdir /spark/events።
2. የክስተት ምዝግብ ማስታወሻ ሲነቃ፣ ነባሪው ባህሪ ሁሉም ምዝግብ ማስታወሻዎች እንዲቀመጡ ነው፣ ይህም ማከማቻው በጊዜ ሂደት እንዲያድግ ያደርገዋል።

ከዚህ ጎን ለጎን የስፓርክ ታሪክ አገልጋይ እንዴት ማዋቀር እችላለሁ?

የስፓርክ ታሪክ አገልጋይን ለማንቃት፡-

1. በ DSEFS ፋይል ስርዓት ውስጥ የክስተት ምዝግብ ማስታወሻዎችን ማውጫ ይፍጠሩ፡ dse hadoop fs -mkdir /spark $ dse hadoop FS -mkdir /spark/events።
2. የክስተት ምዝግብ ማስታወሻ ሲነቃ፣ ነባሪው ባህሪ ሁሉም ምዝግብ ማስታወሻዎች እንዲቀመጡ ነው፣ ይህም ማከማቻው በጊዜ ሂደት እንዲያድግ ያደርገዋል።

በተመሳሳይ፣ የእኔን የስፓርክ ታሪክ አገልጋይ URL እንዴት ማግኘት እችላለሁ? ለምሳሌ፣ ለ ታሪክ አገልጋይ ፣ በተለምዶ https://< ላይ ተደራሽ ይሆናሉ አገልጋይ - url >: 18080/api/v1, እና ለማሄድ መተግበሪያ, በ https://localhost:4040/api/v1. በኤፒአይ ውስጥ፣ መተግበሪያ በመተግበሪያ መታወቂያው [app-id] ተጠቅሷል።

በተመሳሳይ፣ ስፓርክ ታሪክ አገልጋይ ምንድን ነው?

የ የስፓርክ ታሪክ አገልጋይ ነው። ስለተጠናቀቀው መረጃ የሚያሳይ የክትትል መሳሪያ ብልጭታ መተግበሪያዎች. ይህ መረጃ ነው። አፕሊኬሽኖች በነባሪነት Hadoop Distributed File System (HDFS) ላይ ወዳለ ማውጫ ከሚጽፉት ዳታ ተነስቷል።

Sparkui ምንድን ነው?

የ Spark Web UI የጊዜ ሰሌዳ አዘጋጅ ደረጃዎችን እና ተግባሮችን ፣ የአካባቢ መረጃን ፣ ስለ አስፈፃሚ አስፈፃሚዎች መረጃ እና ሌሎችንም ለማየት ያስችልዎታል። ስለ ስፓርክ ፕሮግራም አካላት እና የህይወት ዑደት ለማወቅ ይህንን የ30 ደቂቃ ማሳያ ይመልከቱ። የእርስዎ የስፓርክ መተግበሪያ በHadoop ክላስተር ላይ እንዴት እንደሚሰራ።