რა არის DistCp Hadoop-ში?
რა არის DistCp Hadoop-ში?

ვიდეო: რა არის DistCp Hadoop-ში?

ვიდეო: რა არის DistCp Hadoop-ში?
ვიდეო: Hadoop Day to Day Operations - Distcp - Data back ups and migration 2024, მაისი
Anonim

DistCp (განაწილებული ასლი) არის ინსტრუმენტი, რომელიც გამოიყენება დიდი ინტერ/კლასტერული კოპირებისთვის. ის იყენებს MapReduce განახორციელოს მისი განაწილება, შეცდომების დამუშავება და აღდგენა და მოხსენება. ის აფართოებს ფაილების და დირექტორიების სიას რუკის ამოცანების შესატანად, რომელთაგან თითოეული დააკოპირებს წყაროს სიაში მითითებული ფაილების ნაწილს.

ანალოგიურად შეიძლება ვინმემ იკითხოს, გადაწერს თუ არა Distcp?

მეც უნდა დავაკონკრეტო და განვმარტო ეს distcp - გადაწერა ნება გადაწერა ფაილი არ აქვს მნიშვნელობა ემთხვევა თუ არა ზომას. ეს განაახლებს ყველა ფაილს hdfs-nn2-ში, რომლებიც არ ემთხვევა hdfs-nn1-ის ზომებს, ასევე წაშლის ნებისმიერ გარე ფაილს.

ანალოგიურად, რა არის Hadoop FS ბრძანება? ფაილური სისტემა ( FS ) ჭურვი მოიცავს სხვადასხვა ჭურვის მსგავსს ბრძანებებს რომ უშუალოდ ურთიერთობენ ჰადოპ განაწილებული ფაილური სისტემა ( HDFS ) ისევე როგორც სხვა ფაილური სისტემები, რომლებიც ჰადოპ მხარდაჭერა, როგორიცაა ლოკალური FS , HFTP FS , S3 FS , და სხვა.

ამ გზით, როგორ გადავიტანო მონაცემები ერთი Hdf-დან მეორე Hdf-ზე?

ჰადოპ fs cp - უმარტივესი ერთიდან მონაცემების კოპირების გზა წყაროს დირექტორიაში სხვა . გამოიყენეთ ჰადოპ fs -cp [წყარო] [დანიშნულება]. ჰადოპ fs copyFromLocal – საჭიროა მონაცემების კოპირება ადგილობრივი ფაილური სისტემიდან შევიდა HDFS ? გამოიყენეთ ჰადოპ fs -copyFromLocal [წყარო] [დანიშნულება].

როგორ დავაკოპირო კლასტერი ერთი კლასტერიდან მეორეში?

ფაილების კოპირება შორის მტევანი . Შენ შეგიძლია ფაილების კოპირება ან დირექტორიები სხვადასხვა მტევანი hadoop distcp ბრძანების გამოყენებით. თქვენ უნდა შეიყვანოთ რწმუნებათა სიგელები ფაილი შენში კოპირება მოითხოვეთ წყარო კასეტური შეუძლია დაადასტუროს, რომ თქვენ დამოწმებული ხართ წყაროზე კასეტური და სამიზნე კასეტური.

გირჩევთ: