apache-spark-mllib

7Hitze

1Antwort

Wie kann ich eine TF-IDF für die Textklassifikation mit Spark erstellen?

Ich habe eine CSV-Datei mit folgendem Format: product_id1,product_title1 product_id2,product_title2 product_id3,product_title3 product_id4,product_title4 product_id5,product_title5 [...] Die pr

7Hitze

2Antwort

Wie bewertet man alle Benutzer-Produkt-Kombinationen im Spark MatrixFactorizationModel?

Angesichts einer MatrixFactorizationModel, was wäre der effizienteste Weg, um die vollständige Matrix der Benutzer-Produkt-Vorhersagen (in der Praxis, durch einen bestimmten Schwellenwert gefiltert, u

10Hitze

2Antwort

Mllib Abhängigkeitsfehler

Ich versuche, eine sehr einfache scala Standalone-Anwendung mit dem Mllib zu bauen, aber ich bekomme die folgende Fehlermeldung beim Versuch, das Programm zu bulid: Object Mllib is not a member of pac

6Hitze

4Antwort

MLlib zu Breeze-Vektoren/Matrizen sind für den Bereich org.apache.spark.mllib privat?

Ich habe irgendwo gelesen, dass lokale MLlib-Vektoren/Matrizen derzeit die Breeze-Implementierung umschließen, aber die Methoden, die MLlib in Breeze-Vektoren/Matrizen konvertieren, sind für den Berei

6Hitze

1Antwort

Speichern Apache Spark mllib Modell in Python

Ich versuche ein passendes Modell zu einer Datei in Spark speichern. Ich habe einen Spark-Cluster, der ein RandomForest-Modell trainiert. Ich möchte das angepasste Modell auf einer anderen Maschine sp

6Hitze

1Antwort

RDD von Vector in LabeledPoint mit Scala - MLLib in Apache Spark konvertieren

Ich benutze MLlib von Apache-Spark und Scala. Ich brauche import org.apache.spark.mllib.linalg.{Vector, Vectors} import org.apache.spark.mllib.regression.LabeledPoint in einem LabeledPoint, um ei

8Hitze

4Antwort

PySpark & MLLib: Klassenwahrscheinlichkeiten von zufälligen Waldvorhersagen

Ich versuche, die Klassenwahrscheinlichkeiten eines zufälligen Waldobjekts zu extrahieren, das ich mit PySpark trainiert habe. Ich sehe jedoch nirgendwo in der Dokumentation ein Beispiel dafür, und es