Სარჩევი:

შემიძლია სპარკის ლოკალურად გაშვება?
შემიძლია სპარკის ლოკალურად გაშვება?

ვიდეო: შემიძლია სპარკის ლოკალურად გაშვება?

ვიდეო: შემიძლია სპარკის ლოკალურად გაშვება?
ვიდეო: Apache Spark | Local Mode and work with Command Line REPL 2024, ნოემბერი
Anonim

ნაპერწკალი შეიძლება იყოს გაშვება ჩაშენებული დამოუკიდებელი კლასტერული გრაფიკის გამოყენებით ადგილობრივი რეჟიმი. ეს ნიშნავს, რომ ყველა ნაპერწკალი პროცესები არის გაშვება იმავე JVM-ში - ფაქტობრივად, ერთი, მრავალძალიანი ეგზემპლარი ნაპერწკალი.

ამასთან დაკავშირებით, როგორ გავატარო Apache spark ლოკალურად?

შემდეგი ნაბიჯები გვიჩვენებს, თუ როგორ უნდა დააინსტალიროთ Apache Spark

  1. ნაბიჯი 1: Java ინსტალაციის შემოწმება.
  2. ნაბიჯი 2: Scala-ს ინსტალაციის შემოწმება.
  3. ნაბიჯი 3: Scala-ს ჩამოტვირთვა.
  4. ნაბიჯი 4: Scala-ს ინსტალაცია.
  5. ნაბიჯი 5: ჩამოტვირთეთ Apache Spark.
  6. ნაბიჯი 6: Spark-ის დაყენება.
  7. ნაბიჯი 7: სპარკის ინსტალაციის შემოწმება.

გარდა ამისა, შეგვიძლია თუ არა ნაპერწკლის გაშვება Hadoop-ის გარეშე? როგორც თითო ნაპერწკალი დოკუმენტაცია, Spark-ს შეუძლია Hadoop-ის გარეშე იმუშაოს . შენ მაისი გაუშვით როგორც დამოუკიდებელი რეჟიმი გარეშე ნებისმიერი რესურსის მენეჯერი. Მაგრამ თუ შენ მინდა რომ გაშვება მრავალ კვანძის დაყენებაში, შენ გჭირდებათ რესურსების მენეჯერი, როგორიცაა YARN ან Mesos და განაწილებული ფაილური სისტემა, როგორიცაა HDFS , S3 და ა.შ. დიახ, ნაპერწკალი შეიძლება ამუშავდეს ჰადოპის გარეშე.

გარდა ზემოთ, როგორ გავატარო spark დამოუკიდებელ რეჟიმში?

დასაყენებლად Spark Standalone რეჟიმი , თქვენ უბრალოდ განათავსებთ შედგენილ ვერსიას ნაპერწკალი კლასტერზე თითოეულ კვანძზე. შეგიძლიათ მიიღოთ წინასწარ ჩაშენებული ვერსიები ნაპერწკალი ყოველი გამოშვებით ან თავად ააშენეთ.

შეიძლება ნაპერწკალი Windows-ზე გაუშვას?

ა ნაპერწკალი განაცხადი შეუძლია იყოს ა ფანჯრები -შლის სკრიპტი ან ის შეუძლია იყოს პერსონალური პროგრამა დაწერილი Java, Scala, Python ან R. გჭირდებათ ფანჯრები თქვენს სისტემაში დაინსტალირებული შესრულებადი ფაილები გაშვება ეს აპლიკაციები.

გირჩევთ: