Ich suche nach etwas, das es einfach zu laufen (richtig codiert) embarrassingly parallel JVM-Code auf einem Cluster machen (so dass ich Clojure + Incanter verwenden kann).JVM (kommen peinlich) parallele Verarbeitung Bibliotheken/Tools
habe ich Parallel Python in der Vergangenheit verwendet, dies zu tun. Wir haben einen neuen PBS-Cluster und unser Administrator wird bald IPython-Knoten einrichten, die PBS als Backend verwenden. Beide Systeme machen es fast ein Kinderspiel, bestimmte Arten von Code in einem Cluster auszuführen.
Ich habe den Fehler gemacht, Hadoop in der Vergangenheit zu verwenden (Hadoop ist einfach nicht geeignet für die Art von Daten, die ich verwende) - die Latenz, die selbst kleine Läufe für 1-2 Minuten ausführen.
Ist JPPF oder besser für Gridgain, was ich brauche? Hat jemand hier irgendwelche Erfahrungen mit beiden? Kannst du noch etwas anderes empfehlen?
sieht vielversprechend aus, aber GPL ist ein Schmerz in den Arsch. –