Ali se moram naučiti Hadoop za spark?
Ali se moram naučiti Hadoop za spark?

Video: Ali se moram naučiti Hadoop za spark?

Video: Ali se moram naučiti Hadoop za spark?
Video: Create and Execute MapReduce in Eclipse 2024, Maj
Anonim

Ne, ne se morate naučiti Hadoopa do nauči se Spark . Iskra je bil neodvisen projekt. Toda po YARNand Hadoop 2.0, Iskra postal priljubljen, ker Iskra lahko deluje na vrhu HDFS skupaj z drugimi Hadoop komponente. Hadoop je okvir, v katerem pišete opraviloMapReduce z dedovanjem razredov Java.

Podobno, kaj je bolje naučiti Spark ali Hadoop?

Prva in glavna razlika je zmogljivost RAM-a in njegova uporaba. Iskra uporablja več Pomnilnik z naključnim dostopom Hadoop , vendar "poje" manj internetnega ali diskovnega pomnilnika, tako da če ga uporabljate Hadoop , je bolje najti zmogljiv stroj z velikim notranjim pomnilnikom.

Drugič, ali je Hadoop enostaven za učenje? Hadoop programiranje je lažje tudi za ljudi z znanjem SQL - zahvaljujoč Pig and Hive. Študenti ali strokovnjaki brez predhodnega znanja programiranja, z le osnovnim znanjem SQL, lahko obvladajo Hadoop s celovitim praktičnim delom Hadoop usposabljanje, če imajo vnemo in pripravljenost učiti se.

Vprašali ste tudi, kako dolgo bo trajalo učenje Hadoopa?

približno 3-4 mesece

Ali iskra nadomešča Hadoop?

Iskra nikoli ne more biti a zamenjava za Hadoop ! Iskra je procesor za obdelavo, ki deluje na vrhu Hadoop ekosistemu. Kot je prikazano v zgornji arhitekturi, Iskra pride namesto MapReduce v Hadoop ekosistemu. V njem so še druge komponente Hadoop arhitekturo za obdelavo podatkov, kot sta Pig and Hive.

Priporočena: