Universelle verteilte Planungsbibliothek für Java

Question

Ich bin auf der Suche nach einer allgemeinen Bibliothek für die Planung einer Vielzahl von Aufgaben. Die Bibliothek muss die Möglichkeit bieten, Aufgaben über Knoten im Cluster zu verteilen, Lastenausgleich und Fehlertoleranz durchzuführen - wenn also ein Knoten ausfällt, müssen die Aufgaben für den Knoten über die verbleibenden Knoten verteilt werden.

Ich schaute auf den Hadoop - aber es sieht so aus, als würde es gut für Map-Reduce-Aufgaben funktionieren. In meinem Fall sind Aufgaben einfach Absender von Benachrichtigungen, Prüfer für Objektstatus usw.

Quarz scheint großartig zu sein - aber es ist nicht klar, wie gut es ist, wenn es darum geht, Ereignisse an Knoten zu senden.

Weitere Optionen?

Answer 1

Klingt wie ein Anwendungsfall für Akka.

Answer 2

Oder Sie können auch versuchen, Quartz, kann es wollen, fast alles, was Sie anfassen :)

Answer 3

ich mit Christian darüber einig, dass Akka wie eine bessere Passform zu sein scheint. Quarz ist großartig für das, was es tut, aber sein Grundbaustein ist ein Job, der ausgeführt werden sollte. Es wird Ihnen nicht helfen, Ihren Job in verteilbare Komponenten zu zerlegen.

Wenn alle Ihre Aufgaben in Jobs zerlegt werden können, kann Quartz Ihnen helfen, sie zu planen, das ist es, was es am besten macht. Wenn ein Job jedoch in Teilaufgaben zerlegt werden muss, müssen Sie ein anderes Framework verwenden.

Eine andere Option könnte spring batch sein, je nach Ihren Bedürfnissen.

Answer 4

Sie könnten versuchen ProActive, ein Workflow-Scheduler, der gut mit Java integriert (in Java geschrieben). Es unterstützt die Funktionen, die Sie aufgelistet haben. Es ist ein Open-Source-Projekt, Teil von OW2.

Die folgenden Funktionen sind zum Beispiel erhältlich:

• Workflows, dh Reihe von Aufgaben mit Abhängigkeiten und Konstrukte wie Loop/if/Replikation
• Tasks auf Knoten ausgeführt werden, dh Mittel auf verschiedenen Maschinen ausgeführt werden
• Aufgaben können

[Haftungsausschluss] ich bin ein Teil von Activeeon, das Unternehmen bietet professionelle Unterstützung für Pr automatisch auf Knotenausfall neu gestartet werden oActive [/ Disclaimer]