„Apache Falcon“: nauja „Hadoop“ ekosistemos duomenų valdymo platforma

„Apache Falcon“ yra nauja „Hadoop“ ekosistemos duomenų valdymo platforma, kuri supaprastina „feedoop“ grupių tiekimo procesą ir valdymą. Sužinokite, kaip jį nustatyti.

„Apache Falcon“ yra duomenų gyvavimo ciklo valdymo sistema „Hadoop“ grupėse. Tai užmezga ryšį tarp įvairių duomenų ir „Hadoop“ aplinkos apdorojimo elementų, taip pat teikia informacijos santraukos valdymo paslaugas, pvz., Informacijos santraukos išsaugojimą, kopijas grupėse, archyvavimą ir kt.



Pirmiausia aptarkime, kaip nustatyti „Apache Falcon“. Norėdami atsisiųsti „Falcon“ „git“ saugyklą, paleiskite žemiau pateiktą komandą:

Komanda: „git“ klonas https://git-wip-us.apache.org/repos/asf/falcon.git falcon



git-command-apache-falcon

Norėdami paleisti sakalą, pirmiausia turite jį pastatyti.

Komanda: CD sakalas



Komanda: eksportuoti MAVEN_OPTS = ”- Xmx1024m -XX: MaxPermSize = 256m -noverify” && mvn clean install -DskipTests

Komanda: mvn clean assembly: surinkimas -DskipTests -DskipITs

Sukūrę sakalą, kataloge / falcon / distro / target / target rasite sakalų paketą.

Komandos kuriant sakalą atrodo labai lengvos, tačiau prieš pamatydami „Sėkmės kūrimo“ pranešimą susidursite su daugybe problemų. Kurdamas „Hadoop-2.2.0“, susidūriau su daugeliu problemų

Taigi, norėdamas praleisti „Falcon“ kūrimo skausmą, duodu jums sėkmingai pastatytą sakalų paketą, kurį galite atsisiųsti naudodamiesi žemiau esančia nuoroda.

https://edureka.wistia.com/medias/xw5cfzqmho/download?media_file_id=124642564

Išpakuokite failą, kad gautumėte „falcon-0.10“ katalogą.

Komanda: išpakuokite sakalą-0.10-SNAPSHOT.zip

Nustatykite „flacon“ aplinkos kintamuosius .bashrc faile.

Komanda: sudo gedit .bashrc

Komanda: šaltinis .bashrc

Galite pereiti į sakalų katalogą ir pamatyti jame esančius failus ir katalogus.

Komanda: CD sakalas-0,10-SNAPSHOT /

Komanda: ls

Sakalų scenarijus galite rasti šiukšliadėžės kataloge.

Paleiskite žemiau esančią komandą, kad paleistumėte „Falcon“.

kaip sukurti žurnalo failus Java

Komanda: ./bin/falcon-start

Pamatysite, kad dabar veikia naujas „Daemon FalconServer“.

Komanda: jps

Komanda: ./bin/falcon admin -versija

Atidarykite naršyklę ir eikite į vietinis šeimininkas: 15000 . Galite pamatyti Falcon web ui.

Turite mums klausimą? Paminėkite juos komentarų skiltyje ir mes susisieksime su jumis.

Susijusios žinutės:

„Apache Drill“ gręžimas