Ali spark uporablja zookeeper?
Ali spark uporablja zookeeper?

Video: Ali spark uporablja zookeeper?

Video: Ali spark uporablja zookeeper?
Video: КИТАЙЦЫ, ЧТО ВЫ ТВОРИТЕ??? 35 СУПЕР ТОВАРОВ ДЛЯ АВТОМОБИЛЯ С ALIEXPRESS 2024, Maj
Anonim

Zaženite Iskra Obvladajte več vozlišč in zagotovite, da imajo ta vozlišča enaka Oskrbnik živalskega vrta konfiguracijo za Oskrbnik živalskega vrta URL in imenik.

Informacije.

Lastnost sistema Pomen
iskra .namestiti. oskrbnik živalskega vrta .dir Imenik v Oskrbnik živalskega vrta za shranjevanje stanja obnovitve (privzeto: / iskra ). To je lahko neobvezno

Zato lahko lokalno zaženete Spark?

Iskra lahko biti teči z uporabo vgrajenega samostojnega načrtovalnika gruč v lokalni način. To pomeni, da vse Iskra procesi so teči znotraj iste JVM-efektivno en sam, večnitni primerek Iskra.

Drugič, ali je mogoče Spark uporabljati brez Hadoopa? Kot na Iskra dokumentacija, Iskra lahko teči brez Hadoopa . Lahko ga zaženete kot samostojni način brez kateri koli upravljavec virov. Če pa želite zagnati v nastavitvah z več vozlišči, potrebujete upravitelja virov, kot sta YARN ali Mesos, in porazdeljen datotečni sistem, kot je HDFS , S3 itd. Da, lahko iskra teči brez hadoop.

Prav tako morate vedeti, zakaj se ZooKeeper uporablja v Hadoopu?

Oskrbnik živalskega vrta v Hadoop je mogoče videti kot centralizirano skladišče, kamor lahko porazdeljene aplikacije shranijo podatke in iz njih pridobijo podatke. je uporablja ohraniti, da porazdeljeni sistem deluje skupaj kot ena enota z uporabo njegovih ciljev sinhronizacije, serizacije in koordinacije.

Kako deluje samostojna iskra?

Samostojna način je preprost upravljalnik grozd, vključen v Iskra . Omogoča enostavno nastavitev gruče, ki Iskra sama upravlja in lahko deluje v Linux, Windows ali Mac OSX. Pogosto je to najpreprostejši način za tek Iskra aplikacijo v gručastem okolju. Naučite se, kako namestiti Apache Spark Vklopljeno Samostojna način.

Priporočena: