Apache Falcon: Nova platforma za upravljanje podacima za ekosustav Hadoop



Apache Falcon nova je platforma za upravljanje podacima za ekosustav Hadoop koja pojednostavljuje ugradnju obrade i upravljanja hranom na hadoop klasterima. Naučite kako ga postaviti.

Apache Falcon je okvir za upravljanje životnim ciklusom podataka u klasterima Hadoop. Uspostavlja vezu između različitih podataka i elemenata obrade u Hadoop okruženju, a također pruža usluge upravljanja feedovima kao što su zadržavanje feeda, replikacije preko klastera, arhiviranje itd.





Prvo razgovarajmo o tome kako postaviti Apache Falcon. Pokrenite donju naredbu za preuzimanje git spremišta Falcon:

Naredba: git klon https://git-wip-us.apache.org/repos/asf/falcon.git sokol



git-command-apache-falcon

Da biste pokrenuli sokola, prvo ga morate sagraditi.

Naredba: cd sokol



Naredba: izvoz MAVEN_OPTS = ”- Xmx1024m -XX: MaxPermSize = 256m -noverify” && mvn čista instalacija -DskipTests

Naredba: mvn čista montaža: montaža -DskipTests -DskipITs

Nakon što sagradite sokol, naći ćete sokolov paket unutar direktorija / falcon / distro / target /.

Naredbe za izgradnju sokola izgledaju vrlo jednostavno, ali suočit ćete se s puno problema prije nego što vidite poruku o uspjehu gradnje. Suočio sam se s puno problema tijekom izrade za Hadoop-2.2.0

Dakle, da bih preskočio bol gradnje Sokola, dajem vam uspješno izgrađen sokolski paket koji možete preuzeti pomoću donje poveznice.

https://edureka.wistia.com/medias/xw5cfzqmho/download?media_file_id=124642564

Raspakirajte datoteku da biste dobili direktorij falcon-0.10.

Naredba: raspakirajte sokol-0.10-SNAPSHOT.zip

Postavite varijable okruženja bočice u datoteku .bashrc.

Naredba: sudo gedit .bashrc

što je printwriter u javi

Naredba: izvor .bashrc

Možete otići u sokolov direktorij i vidjeti datoteke i direktorije u njemu.

Naredba: cd falcon-0.10-SNAPSHOT /

Naredba: ls

U bin direktoriju možete pronaći skripte za sokolove.

Pokrenite naredbu ispod da biste pokrenuli Falcon.

Naredba: ./bin/falcon-start

Vidjet ćete da je sada pokrenut novi demon FalconServer.

Naredba: jps

Naredba: ./bin/falcon admin -verzija

Otvorite svoj preglednik i idite na lokalnihost: 15000 . Možete vidjeti web ui Falcon.

Imate pitanje za nas? Spomenite ih u odjeljku za komentare i javit ćemo vam se.

Vezane objave:

Bušenje na Apache bušilici