mesos

5Hitze

4Antwort

Mesos-Master-Absturz mit Tierpfleger-Cluster

Ich stelle einen Tierpfleger-Cluster mit 3 Knoten bereit. Ich benutze es, um meinen Mesos Master hochverfügbar zu halten. Ich lade den zookeeper-3.4.6.tar.gz-Tarball herunter und dekomprimiere ihn nac

5Hitze

2Antwort

Wie bekomme ich die IP des aktuellen Leader-Masters vom Quorum?

Gibt es eine Möglichkeit, die IP des aktuellen führenden Mesos-Masters aus dem Quorum zu bekommen? Wird dieser Wert in einer Variablen gespeichert?

9Hitze

4Antwort

Wie Pre-Paket externen Bibliotheken bei der Verwendung von Funken auf einer Mesos Cluster

Nach dem Spark on Mesos docs man die spark.executor.uri die auf eine Zündverteiler einstellen muss: val conf = new SparkConf() .setMaster("mesos://HOST:5050") .setAppName("My app") .set

5Hitze

2Antwort

Die Ressourcenzuweisung für Spark-Jobs auf Mesos verstehen

Ich arbeite an einem Projekt in Spark und wechselte kürzlich von der Verwendung von Spark Standalone zu Mesos für Cluster-Management. Ich bin jetzt verwirrt darüber, wie Ressourcen zugewiesen werden,

1Hitze

1Antwort

Dynamischer Mesos-Cluster

Ich habe vor kurzem angefangen, mit Mesos und Marathon zu arbeiten. Mein Ziel ist ein dynamischer Cluster. Mit anderen Worten, erlauben Sie Mesos, auf EC2 bei Bedarf Slaves zu starten, und töten Sie s

1Hitze

1Antwort

Ressourcenangebot zeigt weniger Speicher als in Mesos hinzugefügt

Ich untersuche gerade Mesos. Ich habe Mesos Cluster mit einem Slave-Knoten hinzugefügt. Die Hardware ist 1 CPU-Core, 2 GB RAM. aber auf mesos UI zeigt es 1 cpu-core und 1001 MB RAM. Es zeigt ca. 1GB w

6Hitze

2Antwort

Locally ändern Sie die Protokollierungsstufe für den Tierpfleger C-Client

Ich verwende Apache Spark spark-shell mit Mesos und Tierpfleger, die gut funktioniert, außer dass ich mehr Protokollierung von Tierpfleger bekomme, als ich möchte, die ein bisschen ist ablenkend: Welc

5Hitze

1Antwort

Wie zu beheben "Eine Protokollnachricht wurde abgelehnt, weil es zu groß war" von Google Protobuf in Spark auf Mesos?

Ich führe Spark 1.5.1 durch Scala Code und Aufruf der ALS Train-Methode (mllib). Mein Code verwendet MESOS-Executor. Da die Daten groß sind, erhalte ich folgende Fehlermeldung: 15/11/03 12:53:45 INFO

5Hitze

3Antwort

Spark Mesos Cluster-Modus mit Dispatcher

Ich habe nur einen einzigen Computer und möchte Funke-Jobs mit Mesos-Cluster-Modus ausführen. Es könnte sinnvoller sein, mit einem Cluster von Knoten zu arbeiten, aber ich möchte hauptsächlich Mesos t

5Hitze

1Antwort

Funken Shell Mesos Anschluss stecken bei sched.cpp

Hier sind meine spark-defaults.conf und die Ausgabe von spark-shell $ cat conf/spark-defaults.conf spark.master mesos://172.16.**.***:5050 spark.eventLog.enabled false spark.broadcast.compre