Yahoo!'s Hadoop Workflow Engine wird Apache-Projekt

Mirijam Lorenz

Das Hadoop-basierte Oozie-Projekt wurde als neues Apache-Incubator-Projekt vorgeschlagen. Oozie ist ein serverbasierter Workflow/Coordination Service zum Bearbeiten von Datenverarbeitungsaufgaben mit Apache Hadoop. Oozie enthält ein auf XML basierendes, deklaratives Framework sowie Funktionen zur Überwachung, automatischen Wiederholungen und Fehlerhandhabung bei Arbeitsabläufen. Unterstützt werden Prozesse wie Hadoop Map-Reduce, Streaming oder HDFS-Abläufe. Die anfängliche Codebasis wurde von Entwicklern bei Yahoo! entworfen, inzwischen arbeiten auch Entwickler von IBM und Cloudera mit an dem Projekt. Derzeit ist Oozie bei GitHub zu finden. Weitere Informationen zu Oozie bietet das Incubator Proposal sowie die Projektseite.

Geschrieben von
Mirijam Lorenz
Kommentare

Schreibe einen Kommentar

Deine E-Mail-Adresse wird nicht veröffentlicht.