apache-spark-mllib

0Hitze

1Antwort

Ich versuche, etwas sehr ähnlich zu dieser Frage zu tun: How to initialize cluster centers for K-means in Spark MLlib? Allerdings verstehe ich nicht vollständig die Lösung. Wenn ich versuche, mehr Cen

1Hitze

1Antwort

Statistik für Spark mllib DecisionTree

Nach dem Lernen eines mllib DecisionTree-Modells (http://spark.apache.org/docs/latest/mllib-decision-tree.html) wie berechne ich Knotenstatistiken, wie z. B. Unterstützung (wie viele Stichproben stimm

1Hitze

1Antwort

Spark MLlib Recommender Engine Methoden

Ich benutze pySpark MLlib und die Methode von ALS aus der Box für die gemeinsame Filterung. Frage nur, bietet Spark einige andere Methoden der Filterung (für die Berechnung der Entfernung), zum Beispi

5Hitze

1Antwort

Spark Matrix Multiplikation mit Python

Ich versuche, Matrix-Multiplikation mit Apache Spark und Python zu tun. Hier ist meine Daten from pyspark.mllib.linalg.distributed import RowMatrix Meine RDD von Vektoren rows_1 = sc.parallelize([[1

1Hitze

1Antwort

Funken Senden Fehler: Name oder eine Dienstleistung nicht bekannt

Ich bin mit Amazon Maschine die pyspark Code auszuführen code in pyspark shell: a=open("test.txt") s=sc.parallelize(a) print(s.count()) Seine Arbeit, wie ich nicht in der Lage bin direkt sc.textF

-3Hitze

1Antwort

FPGrowth in funken mit verwirrten ergebnis

Ich benutze FPGrowth in funken. die Eingangsmatrix mag: enter image description here und das Ergebnis ist: enter image description here Mein Zweifel ist, warum der Artikel 【I2 I1 I5】 im Ergebnis nicht

6Hitze

2Antwort

Understanding Spark RandomForest featureImportances Ergebnisse

Ich benutze RandomForest.featureImportances, aber ich verstehe nicht das Ergebnis der Ausgabe. Ich habe 12 Funktionen, und das ist die Ausgabe, die ich bekomme. Ich bekomme, dass dies keine apache-spa

2Hitze

1Antwort

Wie anwenderdefinierte Funktion auf jede Teilmenge anwenden, die von einer Gruppe durch Operation in Apache Spark gebildet wird?

Ich habe einen Datenrahmen, die wie folgt aussieht: [ID_number,cust_number,feature1,feature2,feature3,....] Jetzt möchte ich eine Abfrage schreiben, die Gruppen von ID_NUMBER und eine benutzerdefini

6Hitze

1Antwort

Spark K-fache Kreuzvalidierung

Ich habe Probleme, die Validierung des Spark-Kreuzes zu verstehen. Jedes Beispiel, das ich gesehen habe, benutzt es für die Parametereinstellung, aber ich nahm an, dass es nur eine regelmäßige K-fache

0Hitze

1Antwort

spark-ml naive bayes Speichern auf hdfs

Ich weiß durch Spark-MLLLIB können wir naiven Bayes-Modell zu hdfs von save() -Methode speichern. Aber wir versuchen es mit Spark-naive Bayes in hdfs zu speichern, dann gibt es Fehler. Falsche FS: hdf